Phố Downing tọa lạc tại khu vực Whitehall (nơi có nhiều cơ quan chính quyền) ở trung tâm London, cách tòa nhà Quốc hội khoảng một vài phút đi bộ và ở mé bên Cung điện Buckingham. Phố Downing được xây dựng và đặt tên theo Sir George Downing (1632-1689), vốn là một người lính và một nhà ngoại giao dưới thời vua Oliver Cromwell và Charles II. Nhờ có công phục vụ vua, ông được ban thưởng một khu đất gần công viên St James - nơi hiện giờ con đường Downing tọa lạc. Vào thế kỷ XIX, các căn nhà ở một bên phố Downing được dành cho Thủ tướng, Bộ trưởng Tài chính trong khi bên còn lại dành cho các văn phòng ngoại giao. Những năm 1950-1960, chính phủ cũng có cân nhắc kế hoạch phá bỏ tất cả các văn phòng ngoại giao và phần còn lại của con đường Downing để xây dựng những tòa nhà khác hiện đại hơn. Tuy nhiên, kế hoạch trên đã không thực hiện được và bị xếp xó từ lâu.